SQL-批量插入和批量更新

最新总是有人问我sql优化的问题,大部分的原因就是更新实体集合或者更新,因为用的是持久化的框架,例如hibernate,EntityFrmwork,所有这里我总结一下如何在数据库中利用sql进行批量的插入或者更新

批量插入

表结构一样或类似

如果两张表的结构一样,例如一个表的结构和另一个表的结构一样,只是其中一张是临时表,而另一张表是存储数据的表,我们需要进行一次表的迁移的话,我们可以这样。 
insert into tb1 需要的列名 select 按照前面写上需要的列名 from tb2

insert into tb1 * select * from tb2
 
 
  • 1
  • 1

或者

insert into tb1 id,name,address select id,name,address from tb2
 
 
  • 1
  • 1

普通的批量插入

如果对sql语句不熟悉,或者是持久层的框架,大部分是这么写的

INSERT INTO tb_test(ID,NAME) VALUES(1,'zhangsan');
INSERT INTO tb_test(ID,NAME) VALUES(2,'lisi');
INSERT INTO tb_test(ID,NAME) VALUES(3,'wangwu');
 
 
  • 1
  • 2
  • 3
  • 1
  • 2
  • 3

但是按照这种做法,我尝试了一下,一次插入2000条数据,大概需要2分钟,但是如果我们用union all,如下:

INSERT INTO tb_test(ID,NAME)
SELECT 4,'zhangsan'
UNION ALL
SELECT 5,'lisi'
UNION ALL
SELECT 6,'wangwu' ;
 
 
  • 1
  • 2
  • 3
  • 4
  • 5
  • 6
  • 1
  • 2
  • 3
  • 4
  • 5
  • 6

同样是2000条数据,union all 方法是12秒。第二种方法是先将我们要插入的数据总结成一张表,然后进行表插入,这样的效果明显是比一个一个的插入快的。

批量更新

我们知道我们跟新一般的跟着条件的,所以例如我们更新一个实体集合的话,我们也是一个一个的更新,同样,如果我们程序中利用for循环来批量更细的话,我们就得重复着,打开数据库,更新,关闭数据库,而且我们的大部分时间都是消耗在打开数据库,关闭数据库上边了,而且批量更新通常需要依据条件来判断更新哪条数据,但是一个sql中只能有一个where,所以union all显然是不行的。 
但是我在以前的博客写过case when的写法,大家可以向一下,where就好像我们的if(条件)的“条件”,而他就好像我们的case 的when一样,所以我们可以用case when 来实现多“where”,这样的话就能实现多条记录更新的问题。代码如下:

update tb_test SET name = 'zhangsan' case id 
                        when '1' then 'yi'
                        when '2' then 'er'
                        when '3' then 'san' 
                        end,
                        address='zhongguo'  case sex 
                        when '女' then 'femail'
                        when '男'  then 'mail'
                        end
                        where *****
 
 
  • 1
  • 2
  • 3
  • 4
  • 5
  • 6
  • 7
  • 8
  • 9
  • 10
  • 1
  • 2
  • 3
  • 4
  • 5
  • 6
  • 7
  • 8
  • 9
  • 10

上边的语句就是当人们的名称是zhangsan的时候就批量更细id为汉语拼音,当人们的居住地址的时候就把他们的性别写成英文。

批量删除

在这里主要介绍下Sql批量插入的用法,让我们先看下批量删除一般如何来做。
1.批量删除很简单,大家可能都用过:

   

   
   
DELETE FROM TestTable WHERE ID IN ( 1 , 3 , 54 , 68 ) -- sql2005下运行通过

 

    当用户在界面上不连续的选择多项进行删除时,该语句比循环调用多次删除或多条delete语句中间加分号一次调用等方法都高效的多。

小结

当然最开始的时候我也没有想到上边的两种方法,但是当我们的程序遇到性能问题的时候,又不得不去做优化,所以希望这篇博客对哪些批量更新和批量插入的有一些帮组,但是这个还有一些问题,就是不能防止sql注入的问题。所以使用要看情况。

  • 2
    点赞
  • 8
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
### 回答1: Mybatis-Plus提供了批量插入和更新的功能,可以大大提高数据操作的效率。 批量插入可以使用Mybatis-Plus提供的insertBatch方法,将多条记录一次性插入到数据库中。示例代码如下: List<User> userList = new ArrayList<>(); // 添加多条记录到userList中 userMapper.insertBatch(userList); 批量更新可以使用Mybatis-Plus提供的updateBatchById方法,将多条记录一次性更新到数据库中。示例代码如下: List<User> userList = new ArrayList<>(); // 修改多条记录的信息 userMapper.updateBatchById(userList); 需要注意的是,批量插入和更新的记录数不能太大,否则可能会导致数据库性能下降。建议在实际应用中根据具体情况进行调整。 ### 回答2: Mybatis-plus是一款基于Mybatis的增强工具,它提供了许多实用的功能来简化开发,其中就包括批量插入更新操作。 在实现批量插入更新操作时,我们通常会遵循以下步骤: 1. 创建一个实体类,该实体类需要继承Mybatis-plus提供的Model类,并定义需要插入或更新的字段属性。 2. 创建一个Mapper接口,该接口需要继承Mybatis-plus提供的BaseMapper接口,并定义批量插入或更新的方法。 3. 在该Mapper接口中实现批量插入或更新操作的SQL语句。 4. 在Service中调用Mapper接口中的批量插入或更新方法,传入需要插入或更新的数据集合即可。 下面是一个示例代码: 1. 定义一个实体类: ``` @Data @TableName("user") public class User extends Model<User> { @TableId(value = "id", type = IdType.AUTO) private Long id; private String name; private Integer age; } ``` 2. 创建一个Mapper接口: ``` public interface UserMapper extends BaseMapper<User> { void batchInsert(List<User> userList); void batchUpdate(List<User> userList); } ``` 3. 实现批量插入或更新操作的SQL语句: ``` public void batchInsert(List<User> userList) { SqlSession sqlSession = sqlSessionTemplate.getSqlSessionFactory().openSession(ExecutorType.BATCH); UserMapper mapper = sqlSession.getMapper(UserMapper.class); for (User user : userList) { mapper.insert(user); } sqlSession.flushStatements(); sqlSession.commit(); sqlSession.clearCache(); } ``` ``` public void batchUpdate(List<User> userList) { SqlSession sqlSession = sqlSessionTemplate.getSqlSessionFactory().openSession(ExecutorType.BATCH); UserMapper mapper = sqlSession.getMapper(UserMapper.class); for (User user : userList) { mapper.updateById(user); } sqlSession.flushStatements(); sqlSession.commit(); sqlSession.clearCache(); } ``` 4. 在Service中调用Mapper接口中的批量插入或更新方法,传入需要插入或更新的数据集合即可: ``` @Autowired private UserMapper userMapper; @Transactional public void batchInsert(List<User> userList) { userMapper.batchInsert(userList); } @Transactional public void batchUpdate(List<User> userList) { userMapper.batchUpdate(userList); } ``` 总之,Mybatis-plus提供的批量插入更新操作非常简洁和高效,使用起来也比较方便,可以有效地提高开发效率。 ### 回答3: Mybatis-plus是一个基于Mybatis框架的增强工具,在Mybatis的基础上扩展并简化了一些操作,使得使用者可以更加便捷地进行数据库操作。Mybatis-plus提供了批量插入更新的功能,可以大大提高数据操作的效率和性能。 批量插入数据 使用Mybatis-plus进行批量插入数据的方法是使用mapper对象的batchInsert方法,示例如下: ```java List<User> userList = new ArrayList<>(); // 添加User对象到userList中 userService.batchInsert(userList); ``` 在上述示例代码中,我们将多个User对象添加到了userList中,然后调用userService的batchInsert方法进行批量插入批量更新数据 使用Mybatis-plus进行批量更新数据的方法是使用mapper对象的batchUpdate方法,示例如下: ```java List<User> userList = new ArrayList<>(); // 添加要更新的User对象到userList中 userService.batchUpdate(userList); ``` 在上述示例代码中,我们将多个要更新的User对象添加到了userList中,然后调用userService的batchUpdate方法进行批量更新。 需要注意的是,批量更新操作中要更新的字段必须相同,否则会更新失败。 总结 使用Mybatis-plus进行批量插入更新操作可以大大提高数据操作的效率和性能,但是需要注意,在批量更新操作中要更新的字段必须相同,否则会导致更新失败。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值